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Verfahren und Vorrichtung zur Belichtungssteuerung fur eine 

Kamera 

5 Die vorliegende Erfindung betrif ft ein Verfahren zur 

Belichtungssteuerung fur eine Kamera, mit mindestens einem 
Bildsensor, bei dem ein Bildhelligkeits-Sollwert vorgegeben 
■ wird und auf diesen Bildhelligkeits-Sollwert geregelt wird. 
Die Erfindung betrifft ebenso eine Vorrichtung zur 

10 Belichtungssteuerung fur eine Kamera, mit mindestens einem 
Bildsensor, bei dein ein Bildhelligkeits-Sollwert vorgegeben 
wird und auf diesen Bildhelligkeits-Sollwert geregelt wird. 
' Die Erfindung betrif f auch eine Fahrzeugumf eldbeobachtungs- 
Kamera fur Kraf tf ahrzeuge . f 

15 Ktinf tig werden voraussichtlich immer mehr Kraf tf ahrzeuge 
Systeme zur Beobachtung des naheren und weiteren Umf elds 
des Fahrzeugs aufweisen. Dies schliefit Systeme ein, welche 
die Bewegung des Fahrzeugs als Ganzes und als bewegliches 
Objekt in einem Verkehrsstrom auf der StraSe ermitteln. 

20 Auf Grundlage dieser Systeme kann eine zielgerichtete 

Fiihrung und Lenkung des Fahrzeugs zur Fahrerassistenz oder 
zur Navigation und eine Erweiterung von 
Insassenschutzsystemen bis hin zur Aufprallvermeidung 
realisiert werden. Solche Systeme bilden auch die Basis fur 

25- semiautonomes oder sogar autonomes Fahren. 

Als Systeme zur Fahrzeugumf eldbeobachtung sind neben den 
zur Abstands- und Folgeregelung bekannten Radarsystemen 
insbesondere Kamerasysteme (Fahrzeugumf eldbeobachtungs- 
Kamera) mit bildgebenden Sensoren (Bildsensoren) auf der 

30 Basis des sichtbaren Lichts oder im Inf rarotbereich 
geeignet . 

Bei der Aufnahme f ortlauf ender Bilder im Fahrzeug mit einer 
Kamera z.B. zur Spurfindung mit Hilfe einer Bild- 
verarbeitung sind die Belichtungsverhaltnisse nicht 
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konstant. Sie andern sich teilweise sehr schnell wie bei 
Tunnelein- und /-Ausfahrten und umfassen einen weiten 
Dynamikbereich von hellem Sonnenschein bis zu Dunkelheit 
bei Nacht. Die Kamerasysteme mussen aber unter alien 
Bedingungen hinreichend sicher und genau arbeiten. 
Dies erfdrdert einen sehr hoben Dynamikbereich des Systems. 
Dieser Dynamikbereich lasst sich mit heutzutage gangigen, 
preisgunstigen Kameras nicht mit einer Belichtungs- 
einstellung abdecken. Ublicherweise werden hierzu die 
10 Blende und die Belichtungszeit angepasst . 

Im Fahrzeug werden in der Regel Kameras mit LCD- oder CMOS- 
Sensoren verwendet. Der Belichtungszeit entspricht bei 
diesen Sensoren die Zeit, in der Licht gesaramelt wird. 
Diese Zeit wird im folgenden auch „Integrationszeit" 
15 genannt . Sie kann rein elektronisch gesteuert werden. Eine 
mechanische Blende ist gewohnlich nicht vorhanden. Statt 
dessen wird zusatzlich ,bei LCD- urid CMOS-Kamerasensoren die 
Verstarkung eingestellt, bevor das Signal fur die weitere 
Verarbeitung einem Analog- /Digitalwandler zugefuhrt wird. 
20 Bisherige Regelverf ahren, wie sie beispielsweise in der DE 
102 15 525 oder US 2003/098914 beschrieben werden, messen 
kontinuierlich die Regelabweichung von einem Sollwert und 
versuchen diese Abweichung durch kontinuierliche 
Nachregelung m6glichst klein zu halten. 
25 Bei Auswertung der Bilder mit Hilfe von Bildverarbeitungs- 
systemen ist es aber nicht immer vorteilhaft, jedes 
auf einanderfolgende Bild in der Helligkeit zu regeln. 
Andererseits sollte, wenn geregelt werden muss, der 
Sollwert moglichst schnell eingestellt werden. 

30 

Der Erf indung liegt die Aufgabe zugrunde, ein Verf ahren und 
eine Vorrichtung zur Regelung der Belichtung des Sensors 
anzugeben, mit dem auch bei wechselnden Lichtverhaltnissen 
eine moglichst hoher Bildkontrast rasch und sicher 
35 eingestellt werden kann. 
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Diese Aufgabe wird nach der Erfindung durch die Merkmale 
der unabhangigen Patentanspruche gelost. Durch die Merkmale 
der davon abhangigen Unteranspruche sind vorteilhafte 
Wei terbi Idung en angegeben. 

5 

Nach der Erfindung wird die Aufgabe dadurch gelost, dass 
die Regelung auf Grundlage einer Funktion der 
Bildhelligkeit H in Abhangigkeit von der Beleuchtung B 
erfolgt. Als Beleuchtung ist dabei die" tatsachlich optisch 

10 vorhandene und am Bildsensor eingangsseitig eintreffende 
Helligkeit zu verstehen, aus der sich durch entsprechende 
Integration und/oder Verstarkung am Bildsensor 
ausgangsseitig die fur die Auswertung zur Verfugung 
stehende Helligkeit ergibt. 

15 Die Regelung der gemessenen Helligkeit erfolgt durch eine 
Einstellung der Steigung a in Abhangigkeit der Bild- 
helligkeit H von der Beleuchtung B (Kennlinie K) . Eine neue 
Steigung wird dabei in einem Regelschritt ermittelt aus der 
ursprunglichen Steigung' al, dem Bildhelligkeits-Sollwert 

20 Hsoll und der aktuellen Bildhelligkeit Hist nach folgender 
Formel: oe2 = al * Hsoll/Hist 

Durch die Anpassung der Steigung wird unmittelbar ein neuer 
Arbeitspunkt vorgegeben und kann so auf eine zeitaufwendige 
kontinuierliche Einregelung verzichtet werden. 
'25 Die Einstellung der Steigung a erfolgt durch eine 

entsprechende Vorgabe der Integrationszeit und/oder 
Verstarkung des Bildsensors. 

Nach der Erfindung ist es vorzugsweise vorgesehen, dass als 
Bildhelligkeits-Sollwert Hsoll ein Bereich fiir den Sollwert 
30 Hsolll / Hsoll2 vorgegeben wird. Der Abstand der Sollwerte 
voneinander definiert dabei den Arbeitsbereich und damit 
auch die Haufigkeit von Anpassungen. Es wird daher ein 
relativ zum maximalen, theoretischen Arbeitsbereich groSer 
Bereich als aktiver Arbeitsbereich definiert, um relativ 



WO 2005/018225 



PCT/DE2004/000067 



selten anpassen zu imissen. Insbesondere kann dadurch 
sichergestellt werden, dass nach erfolgter Anpassung in 
aller Kegel in einem vorgegebenen Zeitfenster keine neue 
Anpassung erf orderlich ist. Die konkreten Werte hangen aber 
5 stark von der Dynamik der zu erfassenden Bilder und der 
Helligkeitsschwankungen ab. 

Vorzugsweise wird ein Bereich fur den Sollwert von 50 bis 
90% des Sollwertes fur die untere Grenze Hsolll und von 
110% bis 130 % des Sollwertes fur die obere Grenze Hsoll2 

10 vorgegeben . 

Nach. einer Weiterbildung der Erfindung ist es vorgesehen, 
dass bei der Ermittlung der neuen Steigung ce2 eine 
vorgegebene Charakteristik der Kennlinie K mit 
berucksichtig wird. 

15 Erf indungsgemaS ist es vorgesehen, dass, wenn die Kennlinie 
K nicht durch den Ursprung U geht, die neue Steigung a2 
unter BerCicksichtigung zumindest eines Offset -Werts 
Offsl,Offs2 ermittelt wird nach folgender Formel : 
0C2 = GCl * (Hsoll - Offsl)/(Hist - Offs2) 

20 Die zugrundeliegende Aufgabe wird auch durch eine 

Vorrichtung gelost, bei der eine Bildauswertung mit einem 
Rechner erfolgt, mit welchem Rechner im wesentlichen auch 
die Belichtungssteuerung und Regelung bzw. Steuerung der 
Bildhelligkeit durchgefiihrt wird. 

25 Vorzugsweise erfolgt die Einstellung der aktuellen 

Bildhelligkeit Hist auf die Sollbildhelligkeit Hsoll in 
einem Regelschritt . 

Es ist erf indungsgemaS vorgesehen, dass bestimmte, 
relevante Pixel zur Messung der Bildhelligkeit ausgewahlt 
30 . werden und im wesentlichen auf diese Bereiche die 
Bildhelligkeit geregelt wird. 

Nach der Erfindung ist es vorgesehen, dass der Rechner 

dafur vorgesehen ist, uber eine eingestellte 

Empf indlichkeit auf die aktuelle Bildhelligkeit der 
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abgebildeten Szene zuriickzurechnen und diesen Wert fur das 
System oder andere Systeme zur Verftigung zu stellen. 
Als Bildsensoren sind alle bekannten und denkbaren Sensoren 
fur eine Bilderf assung geeignet, insbesondere Multisensor- 
5 strukturen aus lichtempf indlichen Elementen (Bildpunkten 
bzw. Pixeln) , die in Zeilen- oder Matrixform angeordnet 
sind und ibx Licht aus der erf indungsgemaSen Optik 
erhalten. Es konnen auch Si-Bildsensoren (CCD Charge- 
Coupled Devices) verwendet werden. Bei den CCD-Bildsensoren 
10 werden durch das iiber eine transparente Elektrode 
einfallende Licht proportional zur Intensitat und 
Belichtungszeit Ladungstrager erzeugt, die in einem 
„Potentialsumpf * (Si-Si0 2 -Grenzschicht) gesammelt werden. 
Mit weiteren Elektroden werden diese Ladungen in eine 
- 15 lichtundurchlassige Zone verschoben und in „analogen" 

Schieberegistem (Eimerkettenprinzip) zeilenweise in ein 
Ausgangsregister weitertransportiert , das mit hoher 
Taktrate seriell ausgelesen wird. Vorzugsweise werden aber 
auf CMOS-Technik beruhende Bildsensoren eingesetzt. Bei 
20 Verwendung von CMOS-Sensoren kann auch eine Blenden- 

steuerung entf alien. Eine konstante Kontrastauf losung im 
gesamten Helligkeitsbereich wird ermoglicht. Diese Sensoren 
gestatten daruber hinaus vorteilhaf t einen wahlfreien 
Zugriff auf die einzelnen Pixel bei gleichzeitig hoherer 
25 Empfindlichkeit (hohere Ausleserate) . Auch eine erste 
Vorverarbeitung der Signale auf dem Bildsensorchip ist 
moglich. 

In einer besonders gunstigen Ausf iihrungsf orm der Erfindung 
werden an sich bekannte Formate fur die Sensoren, vorzugs- 

30 weise CMOS-Kamerasensoren, mit im wesentlichen einer VGA- 
Auf losung eingesetzt. Durch Verwendung der Standardf ormate 
sind die Kosten des Systems gering. Denn diese werden ■ 
bereits in groSen Stiickzahlen gefertigt. 
Die Erfindung ist aber ausdriicklich nicht auf die 

35 Verwendung dieser Standard-Sensoren beschrankt. Es ist 
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beispielsweise vorgesehen, auch spezielle hochdynamische 
Sensor en beim optischen System nach der Erfindung zu 
verwenden. Insbesondere ist eine Anwendung von sogenannten 
TFA (Thin Film an ASIC) -Chips als Bildsenspren vorgesehen. 

5 Durch Einsatz dieser Sensoren kann ein Dynamikumf ang von 
insgesamt groSer 200 dB erreicht werden. Diese Systeme 
konnen dann auch bei geringer Lichtstarke, insbesondere in 
der Dammerung oder in der Nacht, z.B. als Nachtsichtgerate, 
eingesetzt werden. 

10 Das erf indungsgemSfee Verf ahren und die Vorrichtung werden 
vorzugsweise fur eine Fahrzeugumf eldbeobachtungs-Kamera fur 
Kraf tf ahrzeuge eingesetzt . 

Die Erfindung wird in der nachf olgenden Beschreibung unter 
Bezugnahme auf die beiliegenden Abbildungen (Fig.l bis 

15* Fig. 4) naher erlautert. 

Die Fig.l zeigt schematisch ein Bildverarbeitungssystem, 
Die Fig. 2 zeigt schematisch einen Verlauf der Bild- 
helligkeit H eines Sensors als Funktion der Beleuchtung B, 
Die Fig. 3 zeigt schematisch ein Nachf xihren der aktuellen 

20 Bildhelligkeit Hist auf einen Bildhelligkeits-Sollwert 
(Sollbildhelligkeit) Hsoll. 
r Die Fig. 4 zeigt schematisch ein dritte Auftragung eines 
Verlauf s der Bildhelligkeit (Kennlinie K) , der nicht durch 
den Ur sprung (Nullpunkt) geht. 

25 

In der Fig.l ist ein Bildverarbeitungssystem fur eine 
Kamera zur Fahrzeugumf eldbeobachtung schematisch 
dargestellt. Das Bildverarbeitungssystem besteht aus dem 
Bildaufnehmer 1 (Kamera mit Sensor) , Bilddatenauf nehmer 2 

30 (Framegrabber) und Rechnereinheit 3. Der Bilddatenauf nehmer 
2 nimmt Bilddaten 4 von der Kamera 1 auf. Als Ausgangsdaten 
werden die aufgenommene Bilddaten 5 dann zum Rechner 3 
geftihrt, der dies auswertet. Der Rechner hat auch eine 
Verbindung 6 zur Kamera 1, uber die er die Kamera 1 

35 konf igurieren kann. 
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Die Fig. 2 zeigt 'schematise!! einen Verlauf der 
Bildhelligkeit H eines Sensors als Funktion der Beleuchtung 
B (Kennlinie K) . Ausgangspunkt der Belichtungssteuerung ist 
die Tatsache, das die Sensoren unterhalb der 
5 Sattigungsschwelle (die im Idealfall bei der maximalen 
Bildhelligkeit Hmax liegt) ein im we sent lichen lineares 
Verhalten bezuglich der Beleuchtung, der Integrations zeit 
und der Verstarkung zeigen. 

Die Steigung a des linearen Verlaufs wird durch die 
10 eingestellte Integrationszeit und der eingestellten 
Verstarkung festgelegt: 

a = r) * Integrationszeit *" Verstarkung 

Die Proportional itatskonstante r| beinhaltet die 

Lichtempf indlichkeit des Sensors. 

15 Um eine mittlere Bildhelligkeit H einzustellen, wird ein 
Sollwert Hsoll vorgegeben, auf den geregelt wird. Die 
Ubertragung neuer Regelwerte an den Sensor kann die 
Bilddatenubertragung beeintrachtigen. Der Regelvorgang soil 
daher so selten wie moglich vorgenommen werden. Deshalb 

20 wird zusatzlich ein Toleranzf enster zwischen Hsolll und 

Hsoll2 vorgegeben, in dem sich die Bildhelligkeit bewegen 
darf, bevor die Regelung eingreift. 

Die Fig. 3 zeigt schematisch ein Nachfuhren der aktuellen 
Bildhelligkeit Hist auf einen Bildhelligkeits-Sollwert 

25 (Sollbildhelligkeit) Hsoll. Verlasst die aktuelle 

Bildhelligkeit Hist das Toleranzf enster zwischen Hsolll und 
,Hsoll2, so wird die Steigung der Kennlinie Kl derart 
verandert, dass die aktuelle Bildhelligkeit Hist wieder der 
Sollbildhelligkeit Hsoll entspricht. Die neue Steigung 

30 beschreibt eine neue Kennlinie K2 . 

Das Wesen der Erfindung besteht darin, dass die neue 
Steigung ocl berechnet wird und damit das Nachfuhren der 
aktuellen Bildhelligkeit Hist auf die Sollbildhelligkeit 
Hsoll in einem Regelschritt . erf olgt . 
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Wegen der linearen Abh&ngigkeit ergibt sich die neue 
Steigung oc2 aus der alten Steigung al, multipliziert xnit 
dem VerhSltnis der Sollbildhelligkeit Hsoll zur aktuellen 
Bildhelligkeit Hist: a2 = al • Hsoll / Hist 
5 Hat man das neue 0t2 ermittelt, wird wahlweise die 

Integrationszeit oder die Verstarkung oder auch beides 
angepasst, urn die neue Kennlinie K2 moglichst genau 
einzustellen . 

Nach dem Erkennen der Abweichung kann die neue 
10 Integrationszeit und/oder Verstarkung bei dem Sensor 

eingestellt werden und ist somit schon fur das ubernachste 
Bild aktiv. Bei einer typischen Bildwiederholf requenz von 
25Hz konnte somit bereits nach 40ms die neue Einstellung 
vorgenommen werden. 

15 Bei der Ermittlung der neuen Steigung a2 wird also die 
vorgegebene Charakteristik einer Kennlinie K-der 
Abhangigkeit der Bildhelligkeit H von der Beleuchtung B 
berucksichtigt, in dem in dem im wesentlicher linearen 
Bereich eine entsprechende Anpassung der Steigung erfolgt. 

20 Zudem konnen aber auch die Grenzen des linearen Bereichs 
und Offsets berucksichtigt werden. Grundsatzlich konnte 
aber auch eine Beriicksichtigung einer komplexeren 
Abhangigkeit durch eine entsprechend aufwendige Berechnung 
bspw. Durch ein Polynom hSherer Ordnung erfolgen. 

25 Die Fig. 4 zeigt schematisch die Situation, wenn die 

Kennlinien K3,K4 nicht durch den Ur sprung U gehen. Dann 
wird der Offset Off si bzw. Offs2 bei den entsprechenden 
Helligkeiten abgezogen. 

Die Erfindung beschrankt sich nicht nur auf Sensoren mit 
30 linearer Kennlinie. Bei Sensoren mit nicht linearer 

Kennlinie (z.B. logarithmischer) lasst sich der untere Ast 
der Kennlinie hinreichend genau durch eine Gerade annahern. 
Damit l&sst sich dieses Verfahren auch auf Sensoren mit 
nicht linearer Kennlinie ubertragen und damit die 
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Bildhelligkeit auch bei Sensoren. mit nicht linearer 
Kennlinie hinreichend gut auf einen Sollwert einstellen. 
Typischerweise uberdecken Sensoren mit nicht linearer 
Kennlinie einen wesentlich hoheren Dynamikbereich als 

5 Sensoren mit linearer Kennlinie. Die Einstellung der 
Bildhelligkeit auf einen Sollwert ist bei Sensoren mit 
nicht linearer Kennlinie daher weniger kritisch als bei 
linearen Sensoren. Die erhohte Ungenauigkeit bei der 
Berechnung der Regelparameter bei einer nicht linearen 

10 Kennlinie fiihrt daher zu keiner nennenswerten 
Verschlechterung der Bildqualitat . 

Eine Kontrolle der Bildhelligkeit uber den mit der Bild- 
auswertung befassten Rechner bzw. Mikrocontroller oder 
Digitalem Signal Prozessor DSP, ist vorgesehen, so dass die 
15 aktuelle Bildhelligkeit auf die Sollbildhelligkeit in einem 
Regelschritt einzustellen ist. 

Auch eine Auswahl der relevanten Pixel zur. Messung der 
Bildhelligkeit ist vorgesehen. Bei einer Applikation wie 
z.B. Spurfindung fiillt der fur die Messung interessante 
20 Bereich nur einen Teil des Bildes aus . Die Belichtungs- 
steuerung wird daher auf Pixel aus diesem Bereich 
beschrankt. So kann dieser Bereich optimal dargestellt 
werden . 

Eine Ubemahme der Funktibn "Helligkeitssensor* ist ebenso 
25 vorteilhaft vorgesehen. Wenn der Rechner die Kontrolle uber 
die absolute Einstellung von Verstarkung und Integrations- 
zeit hat, kann er uber die eingestellte Empf indlichkeit auf 
die aktuelle Helligkeit der abgebildeten Szene zurtick- 
rechnen und diesen Wert als AuSenhelligkeit ausgeben. 
30 Dieser Wert kann z.B. benutzt werden, uin die Scheinwerfer 
des Fahrzeugs zu steuern. 
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Patent anspriiche 

1. Verfahren zur Belichtungssteuerung fur eine Kamera, 
mit mindestens einem Bildsensor , bei dem ein 
Bildhelligkeits-Sollwert (Hsoll) vorgegeben wird und 
auf diesen Bildhelligkeits-Sollwert (Hsoll) geregelt 
wird, 

wobei die Regelung durch eine Einstellung einer 
Steigung (a) durch eine Regelung der Integrationszeit 
und/ oder Verstarkung des Bildsensor s erfolgt 
dadurch gekennzeichnet , dass 

eine neue Steigung ermittelt wird aus der ursprung- 
lichen Steigung al, dem Bildhelligkeits-Sollwert 
Hsoll und der aktuellen Bildhelligkeit Hist nach 
f ol gender Forme 1 : 
a2 = al * Hsoll/Hist 

2. Verfahren nach Anspruch 1, dadurch gekennzeichnet , 
dass 

a) die Bildhelligkeit Hist mit einem Toleranzbereich 
(Hsolll,Hsoll2) urn den Bildhelligkeits-Sollwert 
(Hsoll) verglichen wird und 

b) in einem Regelschritt eine neue Steigung a2 nur dann 
vorgegeben wird, wenn die Bildhelligkeit Hist 
auSerhalb des Toleranzbereichs (Hsolll , Hsoll2 ) urn den 
Bildhelligkeits-Sollwert (Hsoll) liegt . 
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3. Verfahren nach Anspruch 1 oder 2, dadurch 
gekennzeichnet, dass bei der Errtiittlung der neuen 
Steigung oc2 eine vorgegebene Charakteristik einer 
Kennlinie (K) der Abhangigkeit der Bildhelligkeit (H) 
von der Beleuchtung (B) berucksichtigt wird. 

4. Verfahren nach Anspruch 3, dadurch gekennzeichnet, 
dass die Kennlinie K nicht durch den Ur sprung U geht 
und die neue Steigung o2 unter Berucksichtigung 
zumindest eines Offset-Werts Offsl ermittelt wird 
nach folgender Formel: 

a2 = al * (Hsoll - Offsl) /(Hist - Offsl) 

5. Verfahren nach Anspruch 4, dadurch gekennzeichnet, 
dass fur jede Steigung (a2, al) ein zugehoriger 
Offset-Wert (Offsl, Off s2) hinterlegt und die neue 
Steigung a2 unter Berucksichtigung der zugehorigen 
Of f set-Werte ermittelt wird nach folgender Formel: 
a2 = al * (Hsoll - Offsl) /(Hist - Offs2) 

6. Vorrichtung zur Belichtungssteuerung fur eine Kamera, 
mit mindestens einem Bildsensor, bei dem ein 
Bildhelligkeits-Sollwert Hsoll vorgegeben wird und 
auf diesen Bildhelligkeits-Sollwert Hsoll geregelt 
wird, 

nach einem Verfahren nach einem der vorherigen 
Anspruche, dadurch gekennzeichnet, dass ein rechner 
vorgesehen ist in welchem eine Bildauswertung mit 
erfolgt und mit dem Rechner zumindest im wesentlichen 
auch die Belichtungssteuerung und Regelung bzw. 
Steuerung der Bildhelligkeit durchgefiihrt wird. 
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7. Vorrichtung nach Anspruch 6, dadurch gekennzeichnet , 
dass bestimmte, relevante Pixel zur Messung der 
Bildhelligkeit ausgewahlt werden und im wesentlichen 
auf diese Bereiche die Bildhelligkeit geregelt wird. 

8*. Vorrichtung nach einem der Anspriiche 6 oder 7, 
dadurch gekennzeichnet , dass der Rechner dafur 
vorgesehen ist, uber eine eingestellte 
Empf indlichkeit auf die aktuelle Bildhelligkeit der 
abgebildeten Szene zuriickzurechnen und diesen Wert 
fur das System oder andere Systeme zur Ver fugung zu 
stellen. 

9 . Verwendung eines Verf ahrens und einer Vorrichtung 
nach einem der vorahgegangenen Anspriiche fur eine 
Fahrzeugumf eldbeobachtungs-Kamera fur Kraf tf ahrzeuge . 



